重庆理工大学学报（自然科学）

重庆理工大学学报（自然科学） ›› 2019, Vol. 33 ›› Issue (8): 170-177.doi: 10. 3969 /j. issn. 1674-8425(z). 2019. 08. 027

• 信息·计算机 • 上一篇    下一篇

一种大数据存储系统架构及数据安全放置机制

刘海宁1,李德山2   

  1. 1. 天津中德应用技术大学 经贸管理学院,天津 300350; 2. 西南科技大学 经济管理学院,四川 绵阳 621010
  • 收稿日期:2018-12-18 出版日期:2019-09-27 发布日期:2019-09-27
  • 作者简介:刘海宁,硕士,副教授 /高级经济师,主要从事管理科学与工程研究,E-mail:liliu_q@163. com;李德山,博士,副教授,主要从事信息管理和宏观经济理论研究?
  • 基金资助:
    天津市科技计划项目技术创新引导专项科技特派员项目“大数据背景下基于动态博弈的数据存储优化模型研究”(18JCTPJC51600);天津市教委科研计划项目“ 线上线下融合模式下快递包装回收路径研究”(2018SK154)

  • Received:2018-12-18 Online:2019-09-27 Published:2019-09-27

PDF (PC)

178

赞

摘要： 针对如何安全有效地实现大数据存储,提出一种大数据存储系统架构及数据安全放置机制,实现海量数据安全有效的存储。设计的大数据存储系统通过文件组合策略改进了HDFS 小文件的读写过程,在 HDFS 文件系统上构建大数据存储平台。提出了数据存储的安全感知数据放置机制,在满足安全性能要求的同时实现高检索性能,将数据放置问题表示为数学模型,最小化数据的总检索时间,最后使用图着色的贪婪算法给出数据放置机制解决方案。实验结果表明:在具有随机网络拓扑的云存储系统上,设计的存储系统及数据安全放置机制在检索时间、数据存储总量和拒绝次数性能方面优于其他方法,且在不同存储节点数量和安全级别下,该方法都具有最少的检索时间。

关键词: 大数据存储, 数据放置机制, HDFS, 安全性, 检索时间

中图分类号: 

  • TP333